Self-Evolving Embodied Agents via Skill-Harness Evolution
通过技能与上下文代码进化实现自进化具身智能体
🧭 Agent 自进化 · 技能与harness优化
Northeastern University · Microsoft Research
提出SHAPER框架,冻结模型参数,通过环境交互进化可复用技能与上下文代码harness,实现无需训练的具身Agent自进化
📌 工作参考价值(4 点)
- 在电商/Agent系统中可借鉴将LLM同时用作planner和optimizer:冻结模型,将成功经验沉淀为可复用技能(类似结构化RAG),通过目标环境rollouts自我进化,避免频繁微调带来的数据和算力成本。
- 将prompt模板、工具调用逻辑、上下文代码视为可优化的外部参数(harness),在线上交互中持续调整,这与推荐系统中优化召回策略、重排规则等非参数组件思路一致,可低风险快速迭代。
- 在无法标注大量数据或训练成本过高时,优先尝试基于test-time scaling的train-free方案(如verifier-free selection、voting)作为基线,可能接近SFT效果,适合初创或快速验证场景。
- 注意该工作针对具身智能体,业务落地时需抽象其核心:固定模型权重,进化外部技能库和任务编排,对电商Agent的多轮对话、工具调用、query理解等模块具备直接迁移价值。